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VERFAHRUNG ZUR EINBINDUNG VON AUDIOVISUELLER CODIERTER 
INFORMATION IN EINEN VORGEGEBENEN UBERTRAGUNGSSTANDARD 

SOWEE ENDGERATE HIERZU 



Stand der Technik 

Fur die Ubertragung von Bild- und Tondaten niedriger 
Bitraten fur Multimedia Konununikation wird mittels der ITU- 
H.324 Spezif ikation "Terminal for low bitrate multimedia 
commmiinication" ein System spezif iziert , das fiir 
Bildtelef onie-Anwendungen geeignet ist. 

Figur 1 zeigt ein Blockschaltbild eines solchen Multimedia 
Systems gemaS dem Standard H. 324. In dem mit Bezugszeichen 1 
gekennzeichneten Block sind die Baugruppen, die in H.324 
naher spezif iziert sind, untergebracht . Der Video-Codec 2 
ist gemaS dem Verfahren nach ITU-H . 263/H . 261 ausgebildet. 
Dem Audio-Codec 3 gemaS ITU G.723 ist eine 

Verzogerungseinrichtung 4 nachgeschaltet , um evtl. zeitliche 
Unterschiede zwischen der Bildcodierung und Toncodieriing 
auszugleichen. Die Einrichtung 5 dient zur Verarbeitung von 
Datenprotokollen, z. B. V.14 LAPM usw. , und die Einrichtung 
6 verarbeitet Steuerprotokolle gemai^ ITU H.245. Den Codecs 2 
und 3 werden iiber entsprechende I/O ( Input /Output ) - 
Einrichtiingen 7 und 8 audiovisuelle Daten angeliefert. Die 
Einrichtungen zur Verarbeitung von Protokollen 5 und 6 
erhalten uber die Einrichtungen 9 (User Data Applications) 
und 10 (System Control) ihrer Eingangsdaten . Die Datenstrome 
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der Codecs 2, 3 sowie der 

Protokollverarbeitungseinrichtungen 5 und 6 werden liber die 
Multiplex-ZDemultiplex-Einrichtung 11 nach dem H.223 
Standard zusammengef lihrt . Das nachgeschaltete Modem 12 
liefert fur die zusammengef aSten Datenstrome V.34 konforme 
Daten und fur die System-Control -Daten V.2 5 konforme Daten. 
Das Ubertragungsnetz 13 schlieSt sich an den Block 1 an mit 
zugehoriger Netzsteuerung 14. 

Vorteile der Erfindung 

Das Verfahren gema£ den Merkmalen des Anspruchs 1 sowie der 
Unteranspriiche ist geeignet objektbasiert codierte 
Information, insbesondere nach dem MPEG-4 
Ubertragungsstandard, in einen vorgegebenen 
rahmenstrukturierten Ubertragungsstandard, insbesondere in 
einen ITU- Standard, einzubinden und ermoglicht so den 
Transport der codierten MPEG-4 Daten, Gegeniiber 
herkommlichen Video-Codierverf ahren, wie dem eingangs 
vorgestellten Videoverf ahren gemaE ITU-H . 263/H . 261 und dem 
Audio-Codec gemaE G. 723,1 ergeben sich insbesondere die 
folgenden Vorteile: 

- objektbasierte Kodierung synthetischer und natiirlicher 
visueller Objekte sowie Audio-Objekte, 

- verbesserte Kodieref f izienz , 

- verbesserte visuelle Fehlerrobustheit der Video-Kodierung, 

- eigenes Format zur Beschreibung der Anordnung 
audiovisueller Objekte, 

- Synchronisation unterschiedlicher audiovisueller Objekte, 

- Interaktion mit audiovisuellen Objekten. 

Dem erf indungsgemaEen Verfahren liegen zwei unterschiedliche 
Konzepte - im folgenden als Konzept A und B gekennzeichnet - 
zugrunde. Generell ist jedes der Konzepte fur sich allein 
geeignet die gewiinschte Funkt ionalitat - Ubertragung objekt- 
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basiert codierter audio-visueller Information - 
sicherzustellen, jedoch kann Konzept A bei groSer 
Objektanzahl (d.h. einer grofien Anzahl von MPEG- 4 
Datenstromen) vorteilhaft sein. Auch eine Kombination der 
5 beiden Konzept e ist moglich. 

Das erf indungsgemaEe Verfahren besitzt daher den groSen 
Vorteil, daS 

alle MPEG-4 Datenstrome - beispielsweise bei Verwendung 
einer groJSen Anzahl von Objekten - mittels der MPEG-4 
10 FlexMux-Spezif ikation zu einem Datenstrom paketiert 

werden konnen, der alle Inf ormationen zum Decodieren 
enthalt (Konzept A), oder bzw. und 

eine eine bi-direktionale Kommunikation basierend auf den 
gesamten MPEG-4 Funktionalitaten durchgefuhrt werden 
15 kann, ohne daS aufwendige zusatzliche Anpassiingen der 

MPEG-4 Daten an die Formate des Kommunikat ions standards 
erforderlich waren. Ermoglicht wird dies durch 
konsequente Ausnutzung der von dem 

Multimediakommunikationsstandard H.324 bereitgestellten 
20 Mechanismen (Konzept B) , 

Weiterhin werden beim Fahigkeiten-Austausch und beim Offnen 
eines Ubertragungskanals die gleichen Datenstrukturen 
verwendet, die den zu ubertragenden Datenstrom-Typen, die 
25 verwendeten Kodier-Werkzeuge und deren Parameter wie z.B. 

die Datenkapazitat kennzeichnen. 

Durch die Verwendung von Datenpaketen konstanter Lange (bei 
Konzept A) bzw. die Ausnutzung der Rahmenstruktur des in 

30 H.324 verankerten Multiplex- Standards H.223 (bei Konzept B) 

wird die Fehlerrobustheit erhoht . Die Auf synchronisation in 
den Datenstrom nach einem Fehler ist einfach mdglich. 
Eine Kapselung oder auch die Zusammenfuhrung 
unterschiedlicher Systeme, z. B. Kombination von H.324 

35 Plattform und MPEG-4 Plattform, ist einfach durchf uhrbar . 



wo 00/14966 _ PCT/DE99/02770 



- 4 



Zeichnungen 

Anhand der weiteren Zeichnungen wird die Erfindung naher 
erlautert. Es zeigen: 

- Figur 2a und 2b Blockschaltbilder von MPEG-4 Multimedia 
Systemen basierend auf einem H.324 Terminal, 

- Figur 3 den Aufbau eines Flex-Mux Protokolls im Simple 
Mode mit konstanter Lange, 

- Figur 4 den Aufbau eines Flex-Mux Protokolls im Mux Mode 
mit konstanter Lange, 

- Figur 5 einen Adaption-Layer Rahmen gemaS ITU H.223, 

- Figur 6 die Verschachtelung der Daten der logischen ITU- 
Kanale, 

- Figur 7 das Header Format, 

- Figur 8 ein Beispiel fur einen Multiplex Entry Descriptor, 

- Figur 9 die Einbindung von Paketen konstanter Lange in die 
ITU- Adaption-Layer variabler Lange. 
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Beschreibung von Ausfuhningsbeispielen 

Bevor das erf indungsgemafie Verfahren im Detail beschrieben 
wird, werden zum besseren Verstandnis die verwendeten 
5 Standards kurz spezif iziert : 

Der Standard ITU-H.324 spezif iziert ein Terminal, welches 
aus einem Video-Codec gemaS H.261/H.263, einem Audio-Codec 
gemaS G. 723, einem Multiplexer gemaS H.223 \ind einem 
Kontroll-Protokoll gemaS H.245 besteht . Der Aufbau und das 
10 Zusammenf ligen der einzelnen Komponenten ist in diesem 

Standard beschrieben. 

Der ITU-H.223 Standard spezif iziert ein paketorientiertes 
Multiplex-Protokoll fiir Multimedia-Kommunikation mit 

15 niedrigen Bitraten. Es wird fiir die Ubertrag\ing niedriger 

Bitraten zwischen zwei Multimedia -Terminals oder einem 
Terminal und einer Multi-Point-Einheit eingesetzt. Das 
Protokoll ermoglicht die Ubertragung einer beliebigen 
Kombination von Audio-, Video- und Dateninf ormationen liber 

20 einen einzelnen Kommunikationskanal . Das Protokoll zeichnet 

sich durch "Low-Delay" und niedrigem Overhead aus. Die 
notwendigen Protokoll- Pro zeduren zur Implementierung des 
Multiplex-Protokolls werden im H.245 Standard spezif iziert . 

25 Der Standard 1TU-H.245 "Control Protocol for Multimedia 

Communication" spezifiziert die Syntax und Semantik von 
Terminal -Inf ormationen und Nachrichten sowie die Prozeduren 
zum Kommunikationsaufbau. Die Nachrichten ermoglichen den 
Austausch von Terminal -Fahigkeiten/Capabilities , z. B. 

30 Terminal A signalisiert Terminal B, daS es Video-Daten 

decodieren kann xind welche Verfahren es unterstiitzt. 



Weiterhin ist ein Protokoll spezifiziert, was die 
zuverlassige Ubertragung von audi ovi sue 11 en Daten mittels 
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einer Acknowledge Nachricht erlaubt (Terminal A signalisiert 
Terminal B den korrekten Empfang des Datenpakets) . 

Der Standard ITU-H. 263/H.261 Standard spezifiziert die 
Codierung von komprimierten Videodaten fur Kanale niedriger 
Bitraten. 

Der G. 723.1 Standard spezifiziert die Decodierung von 
komprimierten Audiodaten fur Kanale niedriger Bitraten. 

Fur die Ubertragung von MPEG-4 Daten mittels des H.24 5 
Standards sind folgende Schritte erf orderlich : 

1. Zunachst muS ein Austausch der Fahigkeiten (Capability 
Exchange) der kommunizierenden Terminals stattfinden, urn 
die gegenseitige Kommunikation zu ermoglichen. Die 
Datenubertragung erfolgt in dem dafiir vorgesehenen 
logischen Kanal 0 entsprechend H.245. 

2. Des weiteren ist es erf orderlich, die MPEG-4 Dekoder zu 
konf igurieren. Die dazu notwendigen MPEG-4 spezifischen 
Informationen wie der Initial Object Descriptor werden 
entweder mittels H.245 insbesondere dem logischen Kanal 
0 Oder liber einen separaten logischen ITU-Kanal 
ubertragen, insbesondere einem logischen Kanal ungleich 
0 entsprechend dem ITU-H. 223 Standard. 

3. AnschlieEend miissen mittels des H.245 Standards die 
einzelnen, logischen Kanale zur Ubertragung der 
audiovisuellen Datenstrome geoffnet werden. 



2u 1.: Austausch der Fahigkeiten (Capability Exchange) 

Fur den Capability Exchange ist es ausreichend, eine MPEG-4 
Capability innerhalb H.245 zu definieren, die wie folgt 
aussehen kann: 
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Isl44 96Capability 

{ 

streamType INTEGER {0..255) 

Profilelndication INTEGER (0..255) 

Levellndication INTEGER (0..255) 

} 

Oder 

Isl4496Capability 
{ 

StreamType INTEGER (0..255) 

DecoderSpecif icinfo OCTET STRING OPTIONAL 

} 

Oder 

Isl4496Capability 
{ 

decConf Descr DecoderConf igDescriptor 

} 

Die einzelnen Felder der obigen Datenstrukturen werden in 
den MPEG-4 Dokumenten (ISO/IEC 14496) naher erlautert. 
Der Vorteil dieser Capability Definition begriindet sich in 
dem geringen Daten-Overhead und einem Verweis auf die 
Spezif ikation innerhalb des MPEG-4 Standards und damit die 
Vermeidiing eines Overheads an zusatzlichen Definitionen im 
H. 245 -Standard. Der streamType definiert den Typen (d.h. den 
Inhalt) des Datenstroms, der Profile Indikator definiert die 
Dekodier-Werkzeuge und der Level die Parameter dieser 
Dekodierwerkzeuge , Innerhalb MPEG-4 sind unter anderem diese 
Parameter enthalten mit Ausnahme der Level Indication, die 
noch zu spezif izieren ist von MPEG. 

Die isl4496Capability dient auch dazu, bei Konzept B mittels 
des „Data Type^' Feldes beim Offnen eines logischen Kanals 
mit der H.245 Funktion OpenLogicalChannel den in diesem 
Kanal ubertragenen MPEG-4 Daten-Typen anzuzeigen. 
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zu 2 . : Konf iguration der Dekoder 

Nachdem mittels des Capability Exchange die 
Terminal fahigke it en definiert sind, wird die Konf iguration 
der Dekoder durch die Ubertragung der Initial Object 
Descriptoren bzw. der Object Descriptoren durchgef uhrt . 
Dieses geschieht entweder mittels eines request/confirm 
Kommandos nach H.245, innerhalb dessen die Initial Object 
Descriptoren ausgetauscht werden oder durch das Offnen eines 
neuen logischen ITU-Kanals, der nur den Initial Object 
Descriptor oder den SL-packetierten Object Descriptor Strom 
enthalt . 

zu 3.: Offnen der logischen Kanale und Dateniibertragiing 

Nach der Konf iguration werden die einzelnen ITU- Kanale 
geof fnet . Allgemein gilt: 

Die audiovisuellen kodierten Inf ormationen, insbesondere 
gemaB MPEG-4, werden zu separaten Datenstromen aufbereitet. 
Ein Encoder, der einen MPEG-4 konformen Datenstom generiert, 
liefert an seinem Ausgang bereits mehrere dieser separaten 
Datenstrome, insbesondere SL (Synchronisation Layer) - 
paketierte Datenstrdme. In Figur 2a und Figur 2b sind die 
Elementardatenstrome (El. Streams) am "Elementary Stream 
Interface" der Sync (Synchronisation) -Layer dargestellt. 
Hierbei ist zu beachten, daS der Header der SL-Pakete auch 
zu „NULL"konfiguriert - also weggelassen - werden kann. 
Innerhalb dieses "Sync Layer" erfolgt die Paketierung der 
Elementardatenstrome, die dann am "Stream Multiplex 
Interface" fur die Weiterverarbeitung abgreifbar sind. 

GemaE Konzept B geschieht das Offnen eines logischen Kanals 
mit der in H.245 definierten OpenLogicalChannel Message. Das 
„portNumber"-Feld dient beim Offnen des jeweiligen logischen 
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Kanals zur Signalisierxing der zugeordneten 

Elementardatenstrom-Identif ikation {ES_ID) , mittels derer 
die Datenstrotne MPEG-4 -seitig referenziert warden. Mit dem 
„streamType"-Feld, dem hier der Wert einer Isl44 96Capability 
5 zugewiesen wird (es konnen also die gleichen Datenstrukturen 

wie beim Cpability Exchange verwendet werden) , wird dabei 
jeweils explizit der Inhalt eines logischen Kanals (d.h. der 
MPEG-4 -Objekttyp) angegeben. Bei der eigent lichen - dann 
folgenden - Dateniibertragung wird bei Konzept B jeder 

10 einzelne SL-paketierte MPEG-4 Datenstrom am „ Stream 

Multiplex Interface" abgegriffen und in einem logischen ITU- 
Kanal ubertragen. Die SL-paketierten MPEG-4 Datenstrome 
werden hierzu vom H.223 Adapt at ionLayer als AL-SDU Pakete 
weiterverarbeitet und mittels des H.223 Standards 

15 gemultiplext (Ausf iihrungsbeispiel gemaS Fig. 2a) . Diese 

Ubernahme des MPEG-4 Framing der Daten in ein Framing gema£ 
H.223 (Sli-PDU := AL-SDU) erhoht die Fehlerrobustheit und 
erlaubt eine einfache Resynchronisation, falls ein Pakets 
fehlerhaft ubertragen wurde . Zudem wird hierdurch eine 

20 ansonsten zusatzlich notwendige Adaption des MPEG-4 

Datenformats an das Format des Multiplexers vermieden. 

Das Konzept B ermoglicht das (spat ere) dynamische Hinzufiigen 

weiterer MPEG-4 Datenstroms . 

25 Fur die Umsetzung von Konzept A werden die einzelnen 

Datenstrome zu insgesamt nur einem Datenstrom mittels des 
MPEG-4 FlexMux gemultiplext und in insgesamt einem logischen 
ITU-Kanal ubertragen (Ausf iihrungsbeispiel gemaS Fig. 2b) . 
Fur diese Art der Ubertragung von MPEG-4 Datenstromen 

30 mittels des FlexMux werden zusatzliche Descriptoren 

definiert, die den Verbindungsauf bau ermoglichen. Nur mit 
diesen ist die Erkennung der einzelnen MPEG-4 Datenstrome 
moglich. Diese MPEG-4-spezif ischen Datenstrome werden 
mittels des MPEG-4 Flexmux Tools gemultiplext. Hierbei wird 

35 die Verwendung von Paketen konstanter Lange definiert, 
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wodurch die Fehlerrobusthei t erhoht wird. Die 
Aufsynchronisation in den Datenstrom nach einem Fehler ist 
so moglich. 

Nachfolgend wird das Konzept A im Detail beschrieben. 

Wie Figur 2b zeigt, konnen folgende logischen MPEG-4-Objekte 

(SL-paketierte Datenstrome) mittels des MPEG-4 FlexMux-Tools 

in einen Ubertragungsrahmen gemultiplext und in einem 

logischen ITU-Kanal ALl iibertragen werden: 

SL-Audio, 

SL-Video, 

SL-OCR (Object Clock Reference), 

SL-OD (Object Descriptor) , 

SL-OCI (Object Content Information) . 

In einer leichten Abwandlung von Konzept A ist es auch 
moglich, Daten des ausschliefilich gleichen Typs (also z.B. 
entweder nur SL-Audio oder nur SL-Video) in einen logischen 
Kanal mit Hilfe des FlexMux-Tools zu multiplexen, d.h. die 
Gesamtheit der MPEG-4 -Datenstrome wiederum in mehreren 
(allerdings wenigeren als bei Konzept B) logischen ITU- 
Kanalen zu iibertragen. Dieses wiirde u.U. eine einfachere 
Trennung und Dekodierung der gemultiplexten Daten im 
Empf anger ermoglichen. Im folgenden wird jedoch wiederum das 
urspriingliche Konzept A, also das Multiplexing aller MPEG- 
Datenstrdme in einen logischen ITU-Kanal mittels des 
FlexMux-Tools betrachtet. 

Das Konzept A ermoglicht (ebenso wie Konzept B) die 
Ubertragung mehrerer MPEG-4 -Datenstrome des gleichen Typs, 
wie z.B. die Ubertragung mehrerer Audiostrome fur einen 
bild-begleitenden Ton in unterschiedlichen Sprachen. 
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Fur das Verfahren gemaE Konzept A ist es notwendig, 
MDXCODETABLE_Entry , wahrend der Initialisierungsphase zu 
iibertragen, um den MPEG-4 FlexMux zu konf igurieren . 

Letztendlich muS dem MPEG-4 Dekoder die vorgenommene 
Zuordnung der einzelnen ES-Strome zu den zu multiplexenden 
Daten mitgeteilt werden. Dies wird mittels einer Channel Map 
Table (oder auch Stream Map Table genannt) erreicht. 

Diese beiden Inf ormationen sind neben den Objekt 
Deskriptoren fur die Dekodierung notwendig. 

Um die zusatzlichen Inf ormationen MUXCODETABLE^Entry und 
Channel Map Table in den Initial Object Descriptor 
einzufugen, ist die Definition neuer Descriptoren notwendig. 
Diese werden in Form von Extension Descriptors in den 
Initial Object Descriptor eingef ligt . 

Class Channel Map Table Descriptor: bit (8) tag= to be 
defined 



bit (16) length: 



Bit(15) 



s tr eamCount ; 



Bit (1) MultiplexCodeFlag; 
For (i=0; i<streainCount; i+^'i 



Bit (16) ES ID; 



Bit (8) FlexMuxChannel ; 
IFMultiplexCodeFlag'^ 



Bit (4) MultiplexCode; 
Bit (4 ) reserved; 



wo 00/14966 




PCT/DE99/02770 



- 12 - 



Der fettgedruckte Teil zeigt den hier neu definierten 
Descriptor , 

Ahnlich kann auch der Aufbau eines 
MuxCodeTableEntryDesccriptors erfolgen: 

Class MuxCodeTableEntryDescriptors: bit (8) tag= to be 
defined 

bit (16) length; 

bit (4) number OfMuxCodeTableEntries; 

bit (1) constantLengthFlag; 

bit (3) reserved; 

IF constantLengthFlag 

bi t { 8 ) FlexMuxLength ; 
For (j=0; j<nuinberOfMxixCodeTableEntries; 

bit (8) length; 

bit (4) MuxCode; 

bit (4) version; 

bit ( 8 ) subs true tureCoimt ; 

for { i = 0 ; i < subs true tureCount ; i+ + ) ( 

bit (5) slotCount; 

bit (3) repetitionCount ; 

for(k=0; kcslotCount; k++) ( 

bit ( 8 ) f lexMuxChannel { i ) (k) ; 
bit (8) nutnberOf Bytes (i) (k) ; 

} 

} 

} 



Der fettgedruckte Teil zeigt den hier neu definierten 
Descriptor. Das Datenfeld niomberOfMuxCodeTableEntries 
ermoglicht die Obertragung der maximal 16 
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MuxCodeTableEntries . Mittels des constantLengthFlag und dem 
Feld FlexMuxLenth wird dem Empf anger signalisiert , dafi die 
FlexMux-Pakete mit konstanter Lange mit der PaketgroSe 
FlexMuxLenth + 2 iibertragen werden. 

5 

Die in MPEG-4 definierten FlexMux-Pakete werden zum einen 
in dem Simple Mode gemaS Fig. 3 und zum anderen in dem 
MuxCode gemaS Fig . 4 ubertragen . 



10 Durch Verwendung von Paketen konstanter, ungerader Lange, 

hier 127 Bytes, konnen die oberen 7 Bits des Length Felds 
zur Synchronisation genutzt werden. 

Dieses erhoht die Fehlerrobustheit und erlaubt eine 
Resynchronisation, falls ein Langenfeld eines Pakets 
15 fehlerhaft ist. 



Diese FlexMux - Pakete mussen nun in einen ITU-Rahmen 
eingebunden werden. In Figur 5 ist ein Adaptation Layer 
(AL) -Rahmen gemaS ITU-H.223 gezeigt, mit einem AL-PDU 

2 0 (Protocol Data Unit) Payload Field. Aufgrund der variablen 

Lange eines FlexMiox Pakets ware das Auffinden eines neuen 
FlexMux Pakets nach einem Fehler im Langenfeld nicht mehr 
moglich. Dieses ist besonders schadlich, wenn mehrere MPEG-4 
Elementarstrome (z. B. BIFS, OD, \ind Video) in einem ITU 

25 Kanal ubertragen werden. 

Durch Verwendung konstanter Langen innerhalb der MPEG-4 
FlexMux Pakete, nach der Erfindung, ist dies nun wiederum 
moglich. 



30 Die einzelnen AL-PDU Pakete variabler Lange werden nun 

mittels des Multiplexers verpackt . 

Der Aufbau des Multiplex Layer und die prinzipielle 
Einbindiong des MPEG-4 FlexMux Datenstroms wird kurz 
erlautert . 



35 
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Eine MUX Protocol Data Unit (MUX-PDU) besteht aus einem 
Header und einem Information Field, indem die Daten der 
einzelnen logischen ITU Kanale verschachtelt sind. Figur 
zeigt den Aufbau. 

Der Header besteht aus einzelnen Feldern, die in Figur 1 
gezeigt sind. 



Der 4 Bit groSe Multiplex Code zeigt auf einen uber H.245 
iibertragenen MultiplexEntry , wovon maximal 15 verschiedene 
definiert werden konnen. 



Das Header Error Control Feld ist ein 3 Bit grofies CRC Feld, 
welches eine Fehler-Erkennung im Header zulaSt . 

Das 1-Bit Packet Marker Feld markiert das Ende einer MUX-SDU 
eines segmetierten logischen Kanals. 

Das in Figur 6 gezeigte Inf ormations-Feld wird mittels der 
in H.245 iibertragenen MultiplexTable konf iguriert . 

Das Informations-Feld kann mit einem Closing Flag jederzeit 
an einer Oktett -Grenze abgeschlossen werden, jedoch darf 
eine MUX-SDU von einem nicht segmentierbaren Kanal nicht 
unterbrochen werden. 



Der MultiplexEntryDescriptor konf iguriert den H.22 3 
Multiplexer und wird in der Initialisierungsphase ubertragen 
(Figur 8) . 

In dieser Figur bedeutet LCN: LogicalChannelNumber , RC: 

RepeatCount , UCF : UntilClosingFlag . 

Der Vorteil wird in der Figur 9 deutlich: 

wenn in einem ITU-Kanal mehrere MPEG-Daten ubertragen werden 
und MPEG-4 Pakete variabler Lange benutzt werden, dann sind 
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alle folgenden FlexMuxPakete nicht mehr decodierbar. Die 
geschickte Verwendung des Langenfelds als ein 
Synchronisationsmarker erlaubt die Auf synchronisation des 
Empf angers . 

5 

Das sendende Terminal signalisiert dem empf angenden Terminal 
die Paketlange mittels des hier definierten 
MuxCodeTableEntryDescriptors, der durch ein Flag 
gekennzeichnet ist, welches die Verwendung von FlexMux 
10 Paketen konstanter Lange signalisiert und weiterhin ein Feld 

enthalt, welches die zu verwendende Lange festlegt. 
Hierdurch ist eine groEe Flexibilitat verbunden mit einer 
groJSen Fehlerrobustheit gewahrleistet . 

15 Die Erfindung kann natiirlich nicht nur fiir MPEG- 4 Daten 

verwendet werden, sondern auch fur andere audiovisuelle 
codierte Information, die in einen standardisierten 
Ubertragungsrahmen einzubinden ist und deren Dekodierung 
einf ach und f ehlerrobust erf olgen soil . 

20 

Das vorgestellte Verfahren kann natiirlich in senderseitigen 
und empf angsseitigen Endgeraten realisiert werden. Fiir die 
senderseitige Einbindung miissen entsprechende Mittel zur 
Aufbereitung bzw. zur Anlieferung von audiovisueller 

25 codierter Information vorgesehen sein sowie entsprechende 

Mittel zum Multiplexen der Datenstrome, zum Austausch der 
Fahigkeiten und zur Signalisierung . Fiir die empf angsseitige 
Auswertung sind Mittel zur Zerlegxing der gemultiplexten 
Datenkanale sowie Mittel zum Austausch der Fahigkeiten und 

30 deren Auswertung und zur Auswertung der Signalisierung 

notwendig. Da iiblicherweise im Dialogverkehr gearbeitet 
wird, sind Teilnehmerendgerate sowohl fiir den Sende- als 
auch fiir den Empf angsbetrieb ausgeriistet . 
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Anspriiche 

1. Verfahren zur Einbindung von audiovisueller codierter 
Information in einen vorgegebenen rahmenstrukturierten 
Ubertragungsstandard mit folgenden Schritten: 

- die audiovisuelle codierte Information wird zu separaten 
Datenstromen aufbereitet, bzw. wird in Form von separaten 
Datenstromen angel iefert, 

- die einzelnen Datenstrome warden in einen bzw. mehrere 
Datenkanal/- kanale des rahmenstrukturierten 
Ubertragungsstandards gemultiplext , 

- die Fahigkeiten, insbesondere die Codier- und 
Decodierfahigkeiten, der miteinander kommunizierenden 
Endgerate warden nach dem Aufbau einer Verbindung 
ausgetauscht , 

- zur Signal isierung werden Datenstrukturen eines 
Kodierstandards verwendet, die Angaben uber den 
verwendeten Datentyp, das zu benutzende Decodierwerkzeug 
und die Kodierungsparameter wie z.B. die Datenkapazitat 
enthalten. 

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet , daS 
die Datenstrukturen, die beim Austausch der Fahigkeiten und 
beim Of fnen eines Ubertragungskanals verwendet werden, 
gleich gewahlt sind. 

3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet , 
daS beispielsweise fur objektbasierte audiovisuell codierte 
Information mit geringer Objektanzahl die entsprechenden 
Datenstrome mittels eines Multiplexers, insbesondere eines 
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Multiplexers nach dem H.223 Standard, paketiert werden und 
in einzelnen Ubertragiingskanalen, insbesondere ITU-Kanalen 
entsprechend dem H.245 Standard, ubertragen werden. 

4. Verfahren nach Anspruch 3, dadurch gekennzeichnet , daS 
zur Zuordnung der einzelnen Pakete innerhalb der ihnen 
zugeordneten Ubertragungskanalen, ein Datenfeld 

(„ port Number " - Feld) dient , das bei einer MPEG-4 Ubertragung 
eine Identif ikation der einzelnen Element ar-Datenstrome (ES- 
ID) enthalt. 

5. Verfahren nach Anspruch 3, dadurch gekennzeichnet, daS 
von dem Multiplex- Verfahren das Datenformat der MPEG-4 - 
Ausgangsdatenstrome (SL-PDUs) direkt ubernommen wird, so daS 
keine weitere Umf ormatierung notwendig wird. 

6. Verfahren nach Anspruch 3, dadurch gekennzeichnet, daS 
Objektdescriptoren, insbesondere der „Initial Object 
Descriptor" nach MPEG-4, fur audiovisuelle codierte 

Inf ormationen in einem separaten Kanal, insbesondere einem 
logischen Kanal ungleich 0 entsprechend dem ITU- H.223 
Standard, untergebracht werden. 

7. Verfahren nach Anspruch 3, dadurch gekennzeichnet, daE 
fiir objektbasierte audiovisuell codierte Information - 
beispielsweise bei groSer Objektanzahl - die entsprechenden 
Datenstrome zu einem gemeinsamen Datenstrom gemultiplext 
werden und in einem Ubertragungskanal , insbesondere in einem 
ITU-Kanal, ubertragen werden. 

8. Verfahren nach einem der Anspruche 1, 2 oder 7, dadurch 
gekennzeichnet, daS neben den gemultiplexten Datenstromen im 
Ubertragungsrahmen des rahmenstrukturierten 
Ubertragungs standards eine Signalisierungsinf ormation 
untergebracht wird, die darauf hinweist, daS gemultiplexte 



wo 00/14966 




PCT/DE99/02770 



- 18 - 



Infortnationspakete konstanter Lange ubertragen werden, 
aufgrund derer eine Synchronisation, insbesondere bei 
fehlerhaften Datenpaketen, duchfuhrbar ist. 

9. Verfahren nach einem der Anspruch l, 2 oder 7, dadurch 
gekennzeichnet, dafi Objektdescriptoren, insbesondere der 

„ Initial Object Descriptor" nach MPEG-4, fur audiovisuelle 
codierte Inf ormationen in einem zusatzlichen Kanal, 
insbesondere dem logischen Kanal 0 entsprechend dem ITU- 
H.245 Standard, untergebracht werden. 

10. Verfahren nach einem der Anspriiche 1, 2, 7 oder 8, 
dadurch gekennzeichnet, daS Zuordnungsdaten zwischen den 
separaten Datenstr6men, insbesondere SL paketierten MPEG-4 
Elementardatenstromen und den gemultiplexten Daten in dem 
zusatzlichen Kanal, insbesondere dem logischen Kanal 0 
entsprechend dem ITU- H.245 Standard, untergebracht werden. 

11. Verfahren nach einem der Anspriiche 1, 2, 7, 8 oder 9, 
dadurch gekennzeichnet, daB fiir die 

Signalisierungsinformation Datenf elder vorgesehen werden, 
welche zum einen die konstante Lange und die PaketgroSe der 
gemultiplexten Inf ormationspakete kennzeichnen. 

12. Verfahren nach einem der Anspriiche 1, 2, oder 7-10, 
dadurch gekennzeichnet, dag als audiovisuelle codierte 
Information MPEG-4 Daten verwendet werden, die zu Flex-Mux- 
Paketen konstanter Lange aufbereitet werden, und dafi diese 
Flex-Mux- Pakete konstanter Lange in einen Ubertragungsrahmen 
gemultiplext werden, die eine Ubertragung gemaS dem ITU- 
Standard H.324 ermoglicht. 

13 . Verfahren nach einem der Anspriiche 1 bis 12 , dadurch 
gekennzeichnet, daS innerhalb der „ Adaptation Layer" 
variabler Lange gemaS ITU-Standard H.324 mehrere MPEG-4 
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Daten in Datenpaketen konstanter Lange untergebracht warden, 
wobei im Anf angsbereich dieser Datenpakete jeweils ein 
Langenfeld vorgesehen ist, welches als 

Synchronisationskennung, insbesondere zur Auf synchronisation 
5 eines Empf angers, verwendbar ist. 

14 . Endgerat zur senderseitigen Einbindung von 
audiovisueller codierter Information in einen vorgegebenen 
rahmenstrukturierten Ubertragungs standard mit folgenden 

1 0 Merkmal en : 

Mitteln zur Aufbereitung der audiovisuellen codierten 
Information zu separaten Datenstromen an das Endgerat 
bzw. zur Anlieferung in Form von separaten Datenstromen 
an das Endgerat, 

15 - Mitteln zum Multiplexen der einzelnen Datenstrome in 

einen bzw. mehrere Datenkanal/- kanale des 
rahmenstrukturierten Ubertragungs standards , 
Mitteln zum Austausch der Fahigkeiten, insbesondere der 
Codier- und Decodierf ahigkeiten, mit weiteren Endgeraten 

20 insbesondere nach dem Aufbau einer Verbindung, 

Mitteln zur Signalisierung unter Verwendung von 
Datenstrukturen, die Angaben uber den verwendeten 
Datentyp, das zu benutzende Decodierwerkzeug und die 
Kodierungsparameter wie z.B die Datenkapazitat enthalten. 

25 

15 . Endgerat zur empf angsseitigen Auswertung von 
audiovisueller codierter Information in einem vorgegebenen 
rahmenstrukturierten Ubertragungs standard mit folgenden 
Merkmalen: 

3 0 - Mitteln zur Zerlegung eines bzw. mehrerer gemultiplexter 

rahmenstrukturierter Datenkanale eines 
Ubertragungsstandards in einzelne audiovisuelle 
Datenstrome , 
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Mitteln zum Austausch der Fahigkeiten, insbesondere der 
Codier- und Decodierf ahigkeiten, mit weiteren Endgeratej 
insbesondere nach dem Aufbau einer Verbindung, 
Mitteln zur Signalisierung unter Verwendung von 
Datenstrukturen, die Angaben iiber den verwendeten 
Datentyp, das zu benutzende Decodierwerkzeug und die 
Datenkapazitat enthalten. 
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